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Сегментация символ!в автомоб1льного номерного знаку 
з врахуванням змин в ракурс! зйомки 
та затемнення зображень 


В статье рассмотрены методы решения задачи сегментации символов на изображениях номерных знаков 
автотранспортных средств на основе сопоставления с моделями расположения символов. Предложенные 
методы сопоставления позволяют учесть искажения в положении символов, связанные с ракурсом съемки 
автомобильного номерного знака, а также увеличить качество сегментации символов на изображениях [© 
частичным затенением автомобильного номера. 

Ключевые слова: сегментация символов, обработка изображений, анализ изображений. 
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Введение 


Сегментация символов является важным промежуточным этапом при обработке 
изображений автотранспортных средств с целью автоматического считывания автомо- 
бильного номера. В рамках сложившихся подходов к решению общей задачи рас- 
познавания автомобильных номеров, сегментация символов проводится после этапа об- 
наружения номерного знака и его нормализации [1], и перед выполнением операции 
распознавания символов [2]. Качество распознавания символов во многом зависит от ка- 
чества проведенной сегментации, что определяет важность этого этапа в цикле обработки 
входных данных в системах распознавания номеров. Небольшие отклонения в опреде- 
лении положения символов могут быть учтены на этапе распознавания символов за счет 
использования методов, допускающих болыпую вариативность входных данных. Это, как 
правило, приводит к увеличению вычислительной сложности этапа распознавания и не 
гарантирует достижения высокой результативности распознавания. 

В работе [3] предложен метод сегментации символов на изображениях автомобиль- 
ных номеров [4], основанный на сопоставлении с реальным изображением номера раз- 
личных моделей расположения символов. При поиске соответствия модели изображению 
допускались линейные искажения геометрии номера, такие, как сжатие и растяжение 
независимо по горизонтали и вертикали. Нахождение максимального значения критерия 
соответствия модели изображению позволяет определить найденный тип модели рас- 
положения символов, и их положение на изображении. Преимуществом предложенного 
метода является независимость от алфавита используемых в номере символов. Кроме 
этого, метод позволяет определить тип модели расположения символов, что часто дает 
априорную информацию о принадлежности символов к буквам или цифрам и упрощает 
дальнейшее распознавание. Метод устойчиво работает с частично смазанными или раз- 
мытыми изображениями, существенными искажениями отдельных символов (загрязне- 
ние и т.п.) — модель «достраивает» положение символа на основе расположения других 
символов. Вместе с этим, следует отметить ряд недостатков предложенного метода. Во- 
первых, в связи с различными условиями получения изображений, номерные знаки могут 
иметь значительные искажения, связанные с ракурсом съемки, которые не могут быть 
учтены линейными искажениями модели типа сжатие или растяжение. Во-вторых, пред- 
ложенный критерий соответствия модели реальному изображению дает высокий процент 
ошибок на частично затененных изображениях номерных знаков. 

Целью данной работы является модификация предложенного метода сегментации 
символов в направлении увеличения его качественных показателей в условиях перспек- 
тивных искажений изображений номерных знаков и их частичного затенения. 


Изменение модели номера 
при изменении ракурса съемки 


При изменении ракурса съемки изображение номерного знака может существенно 
изменяться нелинейным образом в связи с перспективными искажениями. Следовательно, 
изменениям подвергнутся относительное положение и размеры символов, учесть которые 
за счет сжатия и растяжения модели по горизонтали и вертикали невозможно в силу их 
линейности. На рис. 1 показана модель получения перспективных искажений изображе- 
ний номерных знаков, рассматриваемая в данной работе. 

На рис. 1 номерной знак в плоскости наблюдения представляется отрезком АВ. 
Реальное положение номерного знака при съемке может отклоняться от его нормального 
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положения в плоскости У, параллельной фокальной плоскости Х на произвольный угол ф. 
Тогда в повернутой на угол ф плоскости Х` номерной знак будет соответствовать отрезку 
А`В`. Можно показать, что линейная координата в отрезке А`В` с точностью до масштаб- 
ного коэффициента связана с линейной координатой в отрезке АВ следующим соотноше- 
нием: 


` 


а 
1+кх`, (0 


где х — координата в плоскости наблюдения Х, х` — координата в плоскости Х`, 
К — коэффициент перспективного искажения. С учетом соотношения (1) можно выпол- 
нять искажения модели в процессе ее подгонки под реальное изображение с учетом 
возможных перспективных искажений, диапазон которых регулируется диапазоном 
изменения параметра К. 


Рисунок 1- Проекция на горизонтальную плоскость модели получения 
перспективных искажений 


Рисунок 2-— Примеры искажения модели расположения символов с учетом 
перспективных искажений 
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На рис. 2 показаны примеры искажения модели расположения символов с учетом 
перспективных искажений при съемке номерного знака. Центральное изображение мо- 
дели соответствует отсутствию перспективных искажений. 

Предложенная выше модель обработки перспективных искажений изображений но- 
мерных знаков позволяет успешно выделять символы на изображениях номерных знаков, 
полученных при разных ракурсах съемки. На рис. 3 приведен пример обработки реаль- 
ного изображения с целью сегментации символов автомобильного номера. 


Рисунок 3 — Пример сегментации символов на изображении номерного знака 
с учетом перспективных искажений: исходное изображение (а), 
результат сегментации символов (6) 


Обработка затененных изображений 


При обработке частично затененных изображений номерных знаков предложенный 
метод сопоставления с моделью расположения символов часто приводит к ошибкам. Это 
связано со значительным отличием частично затененного изображения номера и изобра- 
жения модели согласно используемому критерию соответствия. Сопоставление модели с 
изображением в данном случае приводит к ошибочному определению в качестве номера 
его части, внутри которой яркость фона изменяется незначительно. В силу случайного 
характера возможного затенения номера учесть это искажение в модели и критерии 
сопоставления достаточно сложно. Вместо этого предлагается внести в алгоритм сегмен- 
тации символов предварительную обработку изображения, уменыпающую эффект зате- 
нения изображения. На рис. 4 приведен пример номерных знаков с частичным затенением 
изображения номера. 

Для уменьшения эффекта искажения изображения номера при его частичном зате- 
нении предлагается использовать операцию локального контрастирования. Используемый 
алгоритм локального контрастирования заключается в вычислении в каждой точке изо- 
бражения взвешенного среднего с использованием в качестве значения весов гауссовской 
функции с центром в центральной точке окна обработки. При использовании окна раз- 
мером 5х5 пикселей в качестве гауссовской маски весов использовалась маска: 
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Тогда взвешенное среднее значение в центральной точке окна может быть по- 
лучено согласно выражению: 
МШ/ => РС, „М 
р 
где МШ., - взвешенное среднее в центральной точке окна, РТС - исходное изо- 
бражение, суммирование ведется по окну обработки. 


Рисунок 4 — Пример номерных знаков с частичным затенением изображения 
номера 


Новое значение яркости в центральной точки окна, получаемое в ходе локаль- 
ного контрастирования, вычисляется согласно выражению: 


128- РС, /МШ.,128-РК/МШ, < 255, 


255, иначе. 


ТОС = 


Пример выполнения операции локального контрастирования показан на рис. 5. 


6) 
Рисунок 5 — Пример локального контрастирования изображений номерных 
знаков: исходные изображения (а), результат локального контрастирования (6) 


В результате применения локального контрастирования к исходным изображениям 
номерных знаков уменьшается влияние частичного затенения номера на результат сег- 
ментации символов. Пример выполнения операции сегментации после применения ло- 
кального контрастирования показан на рис. 6. 


Рисунок 6 — Пример выполнения операции сегментации после применения 
локального контрастирования: исходные изображения (а), результат локального 
контрастирования (6), результат сегментации символов (в) 


«Штучний 1нтелект» 12012 101 


Мурыгин К.В. 
ЗМ и 


Выводы 


В данной работе предложены усовершенствования метода сегментации символов на 
изображениях автомобильных номеров в направлении учета перспективных искажений 
изображений и возможного частичного затенения номера. Предложенные усовершенство- 
вания позволили увеличить качество распознавания автомобильных номеров в более ши- 
роком диапазоне возможных искажений. Тестирование предложенных усовершенствова- 
ний на базе, содержащей 1007 изображений, полученных с различных ракурсов съемки (до 
60 градусов по горизонтали и до 40 по вертикали), показало уменышение ошибки распоз- 
навания номеров с 19% до 11% по сравнению с использованием метода сегментации, 
описанного в [3]. 
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Тезипо оЁ фе оЙеге4 ппргоуетеп оп Фе Базе сопаште 1007 ппасез гесеуеа 
Кот уанойз Гогезпоцепт»$ (тю 60 4естеез$ асгоз$ ап тю 40 оп а уег@аса|) Ваз зВо\уп 
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Статья поступила в редакцию 19.12.2011. 
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